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PROCEDE GENERIQUE DE PRODUCTION AUTOMATIQUE 
D'INTERFACES DE RECONNAISSANCE VOCALE POUR UN DOMAINE 
D'APPLICATION ET DISPOSITIF DE MfSE EN CEUVRE 

La pr^sente invention se rapporte k un procedd g6n6rique de 
production autonriatique d'interfaces de reconnaissance vocale pour un 
domalne d'application et a un dispositif de mise en ceuvre de ce procede. 

Des interfaces de reconnaissance vocale sont utilisees, en 
5 particulier dans des systemes d'interaction operateur-systdme, qui sont des 
cas particuliers d'interfaces homme-machine. Une interface de ce type est le 
moyen qui permet a un operateur d'acceder aux fonctions incluses dans un 
systdme ou une macliine. Plus precis^ment, cette interface permet k 
I'op^rateur d'^valuer I'etat du systeme au travers de modaiit^s de perception 
10 et de modifier cet etat a I'aide de modalites d'action. Une telle interface est 
g6n6ralement le fruit d'une reflexion et d'un travail de conception men^s en 
amont sur I'interaction operateur-systeme, discipline visant a 6tudier les 
relations entre un utilisateur et le systeme avec lequel il interagit. 

L'interface d'un systeme, par exempie I'interface homme-machine 
15 d'un systeme informatique, doit etre naturelie, performante, Intelllgente 
(susceptible de s'adapter en fonctlon du contexte), fiable, intuitive (c'est-ii- 
dire facile k comprendre et a utiliser), autrement dit la plus « transparente » 
possible, afin de permettre a I'utilisateur d'accomplir sa tache sans accroitre 
sa charge de travail par des activites ne relevant pas de son objectif premier. 
20 En faisant appel a des canaux de communication qui nous sont 

familiers, comme la parole et le geste de designation, les interfaces vocales 
sont a la fois plus conviviales et plus perfomiantes. Neanmoins, leur mise en 
place s'avere etre plus complexe que celle des interfaces traditionnelles, 
graphiques par exempie, car elle necessite I'acqulsltion de connaissances 
25 multiples, generalement de haul niveau, et la mise en place de traitements 
complexes visant a exploiter ces connaissances pour gerer 
« intelligemment » le dialogue entre I'operateur et le systeme. 

Actuellement, les interfaces vocales sont realisees 
« manuellement », c'est-a-dire qu'a chaque nouvelle interface, il faut 
30 reetudier toutes les fonctions de I'interface sans pouvoir faire appel a a une 
quelconque assistance ( automates par exempie) pour en faclliter la 
realisation. 
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La presente invention a pour objet un proc^de permettant 
d'automatiser la realisation d'interfaces vocales de la fa$on la plus facile 
possible et la plus simple possible, avec un temps et un cout de 
developpement les plus reduits possible. 
5 La presente invention a ^galement pour objet un disposltif de mise 

en cjeuvre de ce proced^, disposltif qui soit simple a utiliser et peu on^reux. 

Le precede conforme k I'lnvention est caracterisd par le fait qu'on 
saisit un modele conceptuel du domaine d'application de {'interface vocale, 
que I'on produit un ensemble de rdgles de grammaire g^n^rique 

10 representative d'une classe d'applications, que I'on exemplifie les diff^rentes 
regies de grammaire generique dont les contraintes sont satisfaites, que I'on 
produit la grammaire du domaine d'application considere k partir de la 
grammaire g6n§rique exemplifiee et du modele conceptuel, et que I'on gere 
I'interaction op§rateur/systeme. 

15 Le disposltif de production automatis^e d'interfaces vocales 

conforme a I'lnvention comporte des moyens de saisie d'un modele 
conceptuel, des moyens de derivation, des moyens de foumiture d'un 
module g^n^rique et des moyens d'ex^cutlon de la grammaire sp^ifique du 
domaine d'application considere. 

20 La presente invention sera mieux comprise k la lecture de la 

description detaillee d'un mode de mise en ceuvre, pris k titre d'exemple non 
limitatif et Illustr6 par le dessin annexe, sur lequel : 

- la figure 1 est un bloc-diagramme des princlpaux moyens mis 
en oeuvre par I'lnvention, 

26 - la figure 2 est un bloc-diagramme plus detaille que celui de la 

figure 1, et 

- la figure 3 est un bloc-diagramme detaille des moyens 
d'execution des figures 1 et 2. 

Sur la figure 1, on a represente des moyens de saisie 1 
30 permettant de saisir les differentes donnees decrivant le modele conceptuel 
du domaine d'application considere et les relations reliant ces donnees. Ces 
donnees peuvent §tre, par exemple, dans le cas de la commande vocale 
utilisee pour le pilotage d'un avion, la terminologie de tous les appareils et de 
toutes les fonctions d'un avion, ainsi que leurs differentes relations mutuelles. 
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Par ailleurs, on construit et on memorise un ensemble 2 de regies 
de grammaire pour former un modele g6n6rique repr^sentant une classe 
d'applications (pour I'exemple precedemment cite, cette classe serait ceile se 
rapportant a la commande des vehicules en general). A partir du moddle 
5 conceptuel 1 et du modele generlque 2, des moyens de derivation 3 
calculent de fa9on automatique I'ensemble des ressources n^cessaires h la 
production de I'interface vocale d6siree, et en deduisent I'ensemble des 
enonces de langage susceptlbles d'etre traites par cette interface dans le 
contexte de I'application traitee. 

10 En outre, le dispositif de I'invention comporte des moyens de 

revision 4 et des moyens d'explication 5. Les moyens de revision 4 sont 
supervises par I'opdrateur du dispositif ou par son concepteur. lis ont pour 
r6le de reviser les donnees salsies par I'operateur a I'aide des moyens 1, 
dans le but de corriger des termes contraires h la s6mantlque de I'application 

1 5 consider6e et/ou d'ajouter de nouveaux termes pour enrichir la grammaire du 
domaine d'application. Les moyens d'explication 5 permettent de faciliter la 
revision des donnees salsies par I'operateur en exposant les regies qui ont 
ete appliquees lors de I'elaboration de la grammaire sp^cifique du domaine 
d'application. 

20 Les moyens d'execution 6 sont charges de produire 

automatiquement I'interface vocale du domaine d'application consider^. Le 
precede de production de cette interface repose sur la distinction entre les 
ressources qui dependent de I'application et sont des ressources specifiques 
(c'est-a-dire I'ensemble des concepts constituant le modele conceptuel saisi 
25 par les moyens 1 et I'ensemble des termes constituant le lexique), et les 
ressources qui ne dependent pas de cette application (ressources 
generiques), k savoir les regies syntaxiques de la grammaire et I'ensemble 
du lexique de base, qui sont propres a la langue utilisee. 

Pour mettre en ceuvre ce precede, le concepteur de i'interface 
30 vocale doit decrire a I'aide des moyens de saisie 1 les ressources 
specifiques a I'application consideree, c'est-a-dire le modele conceptuel et le 
lexique de cette application. II s'agit pour lui de definir les concepts de 
I'application qu'il souhaite pouvoir etre regis par la voix, puis de verbaliser 
ces concepts. Ce travail de saisie peut §tre facilite par I'utilisation d'un 
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modele formel de I'application envisagee, sous reserve que ce modele existe 
et soit disponible. 

Lorsque les ressources specifiques a I'application sont ainsi 
aoqulses, les moyens de derivation 3, qui fonctlonnent de manidre 
5 entierement automatique, calculent a partir de ces ressources specifiques et 
des ressources generiques fournies par les moyens 2 le modele linguistlque 
de rinterface vocale pour ladite application. Ce modele linguistlque se 
compose de la grammaire et du lexique du sous-langage 66d\6 k cetle 
interface. Les moyens de derivation 3 permettent egalement de calculer 
10 I'ensemble des enonces de ce sous-langage (c'est-a-dire sa phras^oiogie), 
ainsi que I'ensemble des connaissances relatives a I'appljcation et 
necessaires a la gestion du dialogue operateur-systeme. 

Les moyens de revision 4 permettent ensuite a I'opdrateur de 
visualiser tout ou partie de la phraseologie correspondant a son travail de 
15 saisle, afin de pouvoir affiner cette phraseologie par ajout, suppression ou 
modification. AfIn d'aider i'operateur dans cette tSche, les moyens 5 de 
production d'explications permettent de reperer automatlquement quelles 
donnees conceptuelles et lexicales salsles par i'operateur sont a Torigine 
d'une caracteristique donnee d'un enonc^ ou d'un ensemble d'enonc6s du 
20 sous-langage produit. 

Enfin, les moyens d'execution 6 constituent I'environnement 
auque! il est fait appel lors de ['utilisation de I'interface vocale produite, afin 
de valider cette interface. A cet effet, les moyens d'execution exploitent 
I'ensemble des donnees fournies par les moyens de saisle 1 et les moyens 
25 de derivation 3. 

On a represents en figure 2 un exemple de realisation du dispositif 
de mise en oeuvre du precede de rinvention. L'operateur dispose d'une 
interface de saisle 7, telle qu'une interface grapliique, pour saisir le modele 
conceptuel 8 de I'application consideree. II dispose par ailleurs d'une base de 
30 donnees 9 comprenant les entites ou concepts de I'application, et d'un 
lexique 10 de cette application. Ainsi, le modele conceptuel est forme des 
entites de I'application et de leurs associations mutuelles, c'est-a-dire des 
relations predicatives liant entre eux les concepts de I'application. La saisle 
du moddle conceptuel est con^ue comme un processus Iteratif et assiste 
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faisant appel a deux sources de connaissance principales, qui sont la 
grammaire generlque 11 et le lexique de base 12. 

L'une des fa9ons de reallser les moyens de derivation 3 conslste k 
6tendre une grammaire syntaxique et semantlque de manidre a autorlser la 
5 prise en compte de contraintes conceptuelles. II est alnsi possible de definir 
dans ce formalisme de haut niveau une grammaire gen^rique dont 
('adaptation au domaine d'application s'effectue de fa9on automatique au 
travers des donnees saisies par I'operateur. Les moyens de derivation 
permettent alnsi de calculer la grammaire syntaxico-s^mantique et le lexique 
10 propres au domaine d'application. Ainsi, comme schematise en figure 2, a 
partir du modele conceptuel 8 saisi par I'operateur, le disposltif dedult le 
modele linguistique qu'il transmet aux moyens de derivation 13. 11 faut noter 
ici que le modele conceptuel est utilise non seulement pour calculer le 
module linguistique et les sous-modeles qui lui sont li^s (module linguistique 
15 pour la reconnaissance , modele linguistique pour I'analyse et modele 
linguistique pour la generation, mais sert ^galement a la gestlon du dialogue 
op^rateur- systeme pour tout ce qui relive de la reference aux concepts et 
aux objets de rappiication. 

Les moyens de revision- explication 14, pour leur fonction de 
20 revision, sont accesslbles via I'interface graphlque 7 de saisie du moddle 
conceptuel de I'application. lis font appel a un generateur de grammaire 15 
qui calcule la grammaire correspondant au modele salsl et offre des 
mecanismes pour afflcher tout ou partie des enonc^s correspondants. A cet 
effet, le generateur de grammaire 15 comprend une grammaire 16 
25 syntaxique et semantlque d'analyse d'enonces, une grammaire 17 de 
g6n6ratlon d'enonces et une grammaire 18 de reconnaissance vocale. 

Les moyens de revision-explication 14, pour leur fonction 
d'explication, se basent sur une analyse formelle du calcul effectue par les 
moyens de derivation 13 pour identifier les donnees qui sont a I'origine des 
30 caracteristiques de ces enonces. Ces moyens permettent a I'operateur de 
concevoir de fagon iterative son modele tout en s'assurant que les enonces 
qui seront produits repondent bien a ses attentes. 

On a detaille en figure 3 un exemple de realisation des moyens 
d'ex^cutlon 6 de I'interface vocale. Ces moyens comportent : 
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- un dispositif 19 de reconnaissance de parole, qui utilise la 
grammaire 18 deriv^e du module linguistique de manidre 
automatique ; 

- un analyseur d'enonces 20 qui utilise le modele linguistique 
5 fourni par las moyens de derivation 13. II v§rifle syntaxiquement 

et semantiquement ['exactitude des enonc^s ; 

- un processeur de dialogue 21 qui utilise le modele conceptuel 
saisi par I'operateur, ainsi que la base de donnees 9 des entlt^s 
lingulstiques de I'application, saisle par I'operateur ou construite 

1 0 automatiquement par I'application 22 ; 

- un g^nerateur d'6nonc6s 23, qui utilise la grammaire de 
g^n^ratlon d'enonces 17 deriv6e du modele linguistique de 
manidre automatique ; 

- un dispositif 24 de synthese de parole. 

15 L'ensemble des elements 19 a 21 et 23, 24 d'ex^cution de 

interface vocale est gere dans le cas present par un systdme 25 de type 
multi-agents. 

On va maintenant expliquer la mise en ceuvre des moyens de 
saisie, des moyens de revision et des moyens d'explication a I'alde d'un 
20 exemple tres simple. 

A) Moyens de saisle 

Si Ton souhaite rendre accessibles a la voix les concepts de 
25 chaTne de television (CHANNEL), programme televise (PROGRAMME), film 
(MOVIE), dessin anime (CARTOON), ainsi que le fait qu'une chaTne de 
television diffuse (PLAY) des programmes televises, il faut d'abord utiliser les 
moyens de saisie pour decrire le lexique, se rapportant k des concepts, que 
Ton souhaite prendre en compte. 
30 Dans un premier temps, les moyens de saisie permettent d'aider 

le concepteur de I'interface vocale lors de la constitution du lexique. Pour 
cela, des mecanismes sont mis en oeuvre afin de proposer, pour un terme 
donne (par exemple « movie » pour la version angiaise du lexique et « film » 
pour la version franpaise) l'ensemble des formes flechies correspondant a ce 
35 terme (singulier et pluriel d'un nom commun ou conjugalsons d'un verbe, par 
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exemple). Le concepteur du lexique n'a done qu'k selectionner parmi toutes 
ces formes, celles qu'il souhaite retrouver dans I'interface vocaie. 

Les concepts qui doivent etre accessibles a la voix sont ensuite 
crees via ces mdmes moyens de saisie. II s'agit dans le cas present de creer 
5 des entites CHANNEL, PROGRAMME, MOVIE et CARTOON et une relation 
PLAY. Ces concepts sont relics a un ensemble de termes du lexique. Ainsi, 
le concept MOVIE sera relle aux termes « movie », « movies », « film » et 
« films ». Ces liens permettront de creer un certain nombre de clauses 
utilisees par les moyens de derivation : 
10 • entity ([CARTOON, [cartoon]]) 

• entity ([MOVIE, [movie]]) 

• entity ([PROGRAMME, [programme]]) 

• entity ([CHANNEL, [cliannel 5, cnn]]) 

• ... etc 

15 Dans le cas de la relation PLAY, il faut expliciter les acteurs de 

cette relation : la chaine t6levis6e et le programme. Ceci donne lieu a un 
autre type de clauses h destination des moyens de derivation : 

• functionaLstructure ([PLAY, Subject (CHANNEL), DIrectObject 
(PROGRAMME), [play]]). 

20 Les moyens de saisie permettent ensuite d'expliciter un certain 

nombre de relations supplementaires entre ces concepts. Par exemple, un 
film est un type de programme televise. Ces relations auront comme 
consequence de creer d'autres clauses utilisees par les moyens de 
derivation : 

25 . is_a (MOVIE, PROGRAMME) 

• ... etc. 

La mise en place de ces moyens de saisie permet avant tout de 
faciliter la saisie des ressources specifiques necessaires a la mise en oeuvre 
de I'interface vocaie. En effet, cette saisie s'effectue en grande partie grace a 

30 la selection de certains critdres parmi un ensemble de criteres proposes via 
une interface grapliique. Le fichier de ressources (clauses) necessaire aux 
moyens de derivation est genere automatiquement a partir de cette 
representation graphique de I'ensemble des criteres cfioisis. Ceci permet au 
concepteur de I'interface vocaie de ne pas faire d'erreur de syntaxe dans le 

35 ficliier de ressources, ni d'oubli. 
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B) Moyens de revision 

Les moyens de revision permettent au concepteur de I'interface 
5 vocale de valider ou corrlger (e modele conceptuel qui a 6t4 cr66 via les 
moyens de saisie. 

Une premiere etape du processus de revision consiste h visualiser 
tout ou partie de la phraseologie con-espondant au modele conceptuel. 

Dans le present exemple, on pourrait visualiser les phrases 

10 suivantes : 

1) Un film 

2) Un dessin anim4 

3) Un film diffuse Channels 

4) ... etc 

^5 La phrase « Un film diffuse Channel 5» est incorrecle. Les 

moyens d'explication permettent de voir que cette erreur vient du fait que la 
relation PUY a ^t6 mal definie : 

• functionaLstructure ([PLAY, Subject (PROGRAMME), 
DirectObject (CHANNEL), [play]]). 

20 PROGRAMME joue le rdle du sujet 

Au lieu de : 

• functionaLstructure (PLAY, Subject (CHANNEL), DirectObject 
(PROGRAMME), [play]]). 

CHANNEL joue le role de sujet 
25 Les moyens de revision permettent au concepteur de I'interface 

vocale de visualiser cette erreur, et de modifier le module conceptuel de 
fagon a la corriger. 

0) Moyens d'explication 

30 

Les moyens d'explication ont pour fonction d'identifier et de 
decrire le sous-ensemble ou la caracteristique du modele conceptuel dont la 
compilation produit la sous-grammaire con-espondant a un enonce 
particulier, k une expression langagiere - un morceau d'enonc^ - 
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particuliere, ou a une proprtet6 langagiere - une caracteristique d'expression 
- particuliere. 

Ainsi, grace aux moyens d'explication, I'utilisateur a la posslbilite, 
en selectionnant un enonc6, une expression ou une proprtete engendree par 
5 la grammaire, de retrouver et de comprendre le sous-ensemble ou la 
caract^rlstlque du modele conceptuel qui en est I'orlglne. 

Des lors, 11 peut modifier le modele conceptuel pour modifier 
I'enonce, I'expression ou la propriete engendree et, en r6it§rant le processus, 
affiner le modele conceptuel afin d'obtenir la grammaire du langage souhait6. 
10 A titre d'exemple, la posslbilite d'utiliser le pluriel dans la relation 

entre I'entit^ unite et I'entite mission dans les quatre expressions ci-dessous 
est fonction de la cardinalite de cette relation. 

1. « la mission de I'unite » 

2. « les missions de I'unite » 
15 3. « la mission des unites » 

4. « les missions des unites » 

La relation en question est d^crite par la r^gle conceptuelle 

suivante : 

20 entite (unite, relation (mission, X, Y)) 

Si X = 1 et Y = 1, seule Texpression 1. est autorisee par la 
grammaire. Si X = 1 et Y = n, seules les expressions 1 . et 2. sont autoris^es 
par la grammaire. Si X = n et Y = 1, seules les expressions 1. et 3. sont 
25 autorisees par la grammaire. Enfin, si X = n et Y = n, toutes les expressions 
sont autorisees par la grammaire (n > 2), 

Dans cet exemple, les moyens d'explication doivent permettre a 
rutilisateur d'Identifier qu'll faut modifier la cardinalite de la regie conceptuelle 
pour obtenir la grammaire correspondant aux expressions plurielles qu'il 
30 souhaite inclure dans son langage. 

Un mode de realisation des moyens d'explication consiste a 
construire un precede d'analyse en arri^re (« bacl<tracl<ing » en anglais) sur 
le precede de compilation de la grammaire, qui va permettre de partir du 
resultat pour retrouver les regies conceptuelles qui aboutissent k ce resultat 
35 et par la suite de les decrire a I'utilisateu r. 
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REVENDICATIONS 

1. Procede generique de production automatique d'interfaces de 
reconnaissance vocale pour un domaine d'appiication, caracterise par le fait 
qu'on saisit (1, 7) un modele conceptual du domaine d'appiication de 
I'interface vocale, que I'on produit un ensemble de regies de grammaire 
5 generique (11) representative d'une classe d'applications, que I'on exemplifie 
les differentes rdgles de grammaire generique dont les contraintes sont 
satlsfaltes, que Ton produit la grammaire du domaine d'appiication consider^ 
(6) a partir de la grammaire generique exemplifiee et du module conceptuei 
(13) et que Ton gere I'interaction operateur-systeme. 
10 2. Precede selon la revendication 1 , caracterise par le fait que I'on 

revise les donnees saisies et que I'on corrige les termes contraires a la 
semantlque de rapplicatlon consider^e. 

3. ProGed6 selon la revendication 1 ou 2, caracterise par le fait 
que I'on revise (4) les donnees saisies et que I'on ajoute de nouveaux termes 

15 pour enrichir la grammaire du domaine d'appiication. 

4. Precede selon I'une des revendications precedentes, 
caracterise par le fait que I'on produit des explications (5) exposant les regies 
qui ont ete appliqu^es lors de I'elaboration de la grammaire specifique du 
domaine d'appiication. 

20 5. Disposltif de production automatisee d'interfaces de 

reconnaissance vocale pour un domaine d'appiication, caracterise par le fait 
qu'il comporte des moyens de saisie (1, 7) d'un modele conceptuei, des 
moyens de derivation (3, 13), des moyens de fourniture d'un modeie 
generique (2, 11) et des moyens d'execution de la grammaire specifique du 

25 domaine d'appiication considere (6, 15). 

6. Disposltif selon la revendication 5, caracterise par le fait qu'il 
comporte en outre des moyens de revision (4, 14). 

7. Disposltif selon la revendication 5 ou 6, caracterise par le fait 
qu'il comporte en outre des moyens d'explication (5, 14). 
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